Teste de inteligência não verbal R-1: o tamanho do efeito para as normas de 2018 / R-1 non-verbal intelligence test: the effect size for the 2018 standards

O estudo apresenta os tamanhos do efeito, seus intervalos de confiança, classificações e visualizações para a atualização normativa de 2018 do Teste não verbal de Inteligência R-1, visto que as diferenças estatisticamente calculadas com base no valor p oferecerem evidências tênues contra a hipótese nula e, por isso, não servem como uma prova da significância clínica. Utilizou-se a amostra normativa do instrumento, composta por 5.595 adultos, de ambos os sexos, com idades entre 18 e 65 anos, provenientes das cinco regiões geográficas brasileiras e subdivididos pelos níveis de ensino fundamental, médio e superior. Os resultados apontaram tamanhos do efeito entre médios e grandes na comparação entre os níveis de ensino fundamental e médio; grande a muito grande na relação entre o ensino fundamental e o superior e; pequenos a médios entre os níveis médio e superior de ensino. Concluiu-se que as diferenças estatisticamente observadas, por meio das análises de variância e pos-hoc de Tukey refletem um efeito real quando se considera o impacto da variável nível de escolaridade no desempenho do teste. Entendeu-se que os estudos normativos do instrumento refletem um impacto real quando se considera a variável em estudo, devendo incluir o tamanho do efeito e seus respectivos intervalos de confiança.

The study presents the effect sizes, their confidence intervals, ratings, and visualizations for the 2018 normative update of the R-1 Nonverbal Intelligence Test, since the statistically calculated differences based on the p-value offer tenuous evidence against the null hypothesis and do not serve as a proof of clinical significance. We used the normative sample of the instrument, consisting of 5,595 adults of both sexes, aged 18 to 65 years, from the five Brazilian geographic regions and subdivided by elementary, middle, and high school levels. The results showed medium to large effect sizes in the comparison between elementary and high school levels; large to very large in the relation between elementary and high school; and small to medium effect sizes between high school and high school levels. It was concluded that the statistically observed differences, by means of variance and Tukey's post-hoc analyses reflect a real effect when considering the impact of the education level variable on test performance. It was understood that normative studies of the instrument reflect a real impact when considering the variable under study, and should include the effect size and their respective confidence intervals.

Precisão entre juízes na avaliação dos aspectos formais do teste de Wartegg / Raters reliability in the assessment of formal aspects of the Wartegg test

A questão da clareza e objetividade dos critérios utilizados na avaliação e interpretação dos testes psicológicos é uma das preocupações dos profissionais da Psicologia que trabalham com a avaliação psicológica. O objetivo deste trabalho consistiu em verificar em que medida os critérios de avaliação delineados para alguns aspectos formais do Teste de Completamento de Desenhos de Wartegg (WZT) estão definidos adequadamente. Participaram desta pesquisa dois juízes devidamente treinados nos critérios desenvolvidos pela autora, que avaliaram 191 protocolos do teste. Para determinar a precisão entre juízes foi calculado o coeficiente Kappa, para cada campo em cada uma das variáveis estudadas, tendo variado 0,66 a 1,00. Estes resultados permitiram concluir que os critérios propostos, de um modo geral, se mostraram claros e objetivos para os aspectos formais estudados, possibilitando o seu emprego de forma relativamente segura na avaliação de um protocolo do WZT.

The question of clearness and objectivity of the criteria in the assessment and interpretation of psychological tests has been a concern between Psychology professionals who work with psychological assessment. The purpose of this work was to verify if the assessment criteria for some formal aspects of The Wartegg Test (WZT) are adequately defined. Two trained judges evaluated 191 test protocols. The Kappa coefficient was calculated to determinate the rater’s reliability to each studied variable and for each WZT field. The coefficients between raters ranged from 0.66 to 1.00. It can be concluded that the proposed criteria for evaluation of the formal aspects were clear an objective and they will permit their use in a secure form in the WZT assessment.

Avaliação da criatividade por meio da produção de metáforas / Evaluación de la creatividad a traves de la producción de metáforas / Criativity assessment by metaphor production

Este estudo refere-se à precisão e validade de um instrumento de avaliação da criatividade por meio da produção de metáforas. A amostra foi de 124 estudantes universitários dos cursos de Psicologia, Letras, Administração de Recursos Humanos e Turismo. Os dados foram analisados verificando-se, em termos de precisão, a consistência interna do instrumento e a adequação do seu sistema de correção, por intermédio de juízes independentes. A validade foi aferidas pela consistência interna e pela correlação do instrumento com duas atividades do teste “Pensando Criativamente com Figuras e Palavras”, versão brasileira. Os resultados indicaram existir, em termos de precisão, consistência interna para o instrumento e adequação do seu sistema de correção, e em termos de validade, observou-se evidências relacionadas à estrutura interna, com suas variáveis correlacionando-se uma com as outras e correlações positivas e significativas com as duas atividades do teste Pensando Criativamente com Figuras e Palavras, em especial a atividade verbal.

This study refers to verify the reliability and evidences of validity the an instrument of assessment of creativity through the production of metaphors. The subjects were 124 students of Psychology, Literature, Human Resources Administration and Tourism. The data were analyzed verifying, through reliability, the internal consistence of the instrument and the adequacy of its correction system, through independent judges. The validity were measured through the internal consistence and the correlation of the instrument with two activities of the “Pensando Criativamente com Figuras e Palavras” the Brazilian version. The results indicated the existence of, in terms of reliability, internal consistence for the instrument and the adequacy of its correction system. In terms of validity it was observed evidences related to internal structure, with its variables correlating with each other and the presence of positive and significative correlations with the two activities of the “Pensando Criativamente com Figuras e Palavras” test, specially the verbal activity.

Este estudio se refiere a la exactitud y validez de un instrumento de evaluación de la creatividad a traves de la producción de metáforas. La muestra de 124 estudiantes de pregrado de la psicología, la literatura, la gestión de Recursos Humanos y Turismo. Los datos fueron analizados y demostraron que existían, em términos de precisión, coherencia interna y adecuación del sistema de corrección, por medio de jueces independientes. Se evaluó la validez de la coherencia interna y la correlación del instrumento con dos actividades de la prueba “Pensar criativamente con imágenes y palabras”, la versión brasileña. Los resultados indicaron que, em términos de precisión, la consistencia interna del instrumento y la adecuación de su sistema de enseñanza, y en términos de validez, no hubo pruebas relacionadas con la estructura interna, con sus variables correlacionadas entre sí y las correlaciones positiva y significativa con las dos actividades de la prueba Pensar criativamente con imágenes y palabras, en particular, la actividad verbal.